iT邦幫忙

第 11 屆 iThome 鐵人賽
DAY 23
0
Google Developers Machine Learning

ML Study Jam Journey系列 第 23 篇

Day 23　Art and Science of Machine Learning (cont.)

11th鐵人賽
790 瀏覽

  • 分享至 

  • xImage
    •  

Logistic Regression

  • Use Cross Entropy typically

  • Two problems

    1. Weights will be driven to -inf and +inf the longer we train
    2. Near the asymptotes, gradient is really small

Training

  • Gradients can vanish - Use ReLu instead of sigmoid/tanh
  • Gradients can explode - Batch Normalization
  • ReLu layers can die - Lower learning rates

上一篇
Day 22　Art and Science of Machine Learning (cont.)
下一篇
Day 24　Art and Science of Machine Learning (cont.)
系列文
ML Study Jam Journey 共 30 篇
  1. 26
    Day 26　Art and Science of Machine Learning (cont.)
  2. 27
    Day 27　Art and Science of Machine Learning (cont.)
  3. 28
    Day 28　Summary
  4. 29
    Day 29　Summary (cont.)
  5. 30
    Day 30　Summary (cont.)
完整目錄
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言
iThome鐵人賽
參賽組數
1123 組
團體組數
52 組
累計文章數
23096 篇
完賽人數
656 人
iT+看影片追技術 看影片追技術 看更多
熱門tag 看更多
15th鐵人賽 13th鐵人賽 14th鐵人賽 12th鐵人賽 11th鐵人賽 鐵人賽 2019鐵人賽 2018鐵人賽 javascript 2017鐵人賽 python windows php c# windows server linux css 程式設計 react vue.js
熱門問題
熱門回答
熱門文章
IT邦幫忙